簡介 BPServiceActor 主要在DataNode中用于和NameNode溝通的類。主要功能如下： 與 namenode 進行預注冊握手。 向 namenode 注冊。 定期向 namenode 發送心跳。 處

neovim是從vim的一個分支fork出來的，從性能等方面來講都比vim強很多，所以從vim轉到neovim了。 本文涉及的neovim配置都在https://git.zeekling.cn/linux/nvim-co

問題現象 執行docker stop xxxx報錯如下： Error response from daemon: cannot stop container: xxxx: tried to kill container,

jobhistory 作業緩存 jobhistory 一般會保存一部分作業信息到內存中，查詢作業信息的時候一般會從內存查詢，如果內存查詢不到就會從磁盤上掃描。 jobhistory 緩存一般分為兩層，第一層是guava緩

NameNode客戶端協議詳解 協議的定義主要在類NamenodeProtocols中。如下： public interface NamenodeProtocols extends ClientProtocol, Dat

Namenode最重要的兩個功能之一就是維護整個文件系統的目錄樹（即命名空間namesystem） 。 HDFS文件系統的命名空間（namespace） ， 也就是以“/”為根的整個目錄樹， 是通過FSDirectory

作業啟動 作業提交的客戶端比較核心的類是Job.java，看作業啟動的源碼需要從這個類開始看。 Job.java 作業啟動的入口函數為waitForCompletion函數。當前函數的核心函數為submit()，主要如下

常見命令記錄，總結篇

簡介 Yarn采用了基于事件驅動的并發模型： 所有狀態機都實現了EventHandler接口，很多服務（類名通常帶有Service后綴）也實現了該接口，它們都是事件處理器。 需要異步處理的事件由中央異步調度器（類名通常

簡介 ResourceManager(RM)，RM是全局的資源管理器，負責整個系統的資源管理和分配。主要由以下兩部分組成： 調度器：根據容量、隊列限制條件將系統資源分配給各個應用。 資源分配的單位是container